EvoSkillRec: Skill-Genome Evolution for Recommender Architecture Discovery
EvoSkillRec:技能基因组进化用于推荐系统架构发现
🧭 推荐架构自动进化 · Skill 库与 LLM 代码合成 ★ 深度解读
City University of Hong Kong · Kuaishou Technology · Xi'an Jiaotong University
将推荐模型拆解为可复用技能卡,通过技能空间重组与LLM代码空间发明双空间进化,并沉淀有效创新
📌 工作参考价值(4 点)
- 将现有线上模型拆成结构化 skill card:声明输入输出 key、inductive bias、失败签名、验证 suite 与历史收益,形成可检索库;新架构组合时靠类型检查和规则匹配过滤不可行候选,避免浪费训练资源。
- 双空间进化策略:先用低成本 skill 空间做 add/replace/hybridize/specialize 重组,性能平台期再动态增加 code 空间预算,让 LLM 规划器与合成器发明新模块;验证有效后将其沉淀为 Tier-2 技能,供后续 skill 空间复用,形成持续积累。
- 生成式排序模型上可联合优化 AUC 与训练 MFU:设置 eligibility 门槛(AUC 损失 ≤1e-3、MFU ≥ 种子模型 95%)选择候选,实验显示同一批进化结构可同时提升精度与硬件利用率,避免两目标对立。
- LLM backbone 对发现结果影响显著:CTR 任务闭源模型更稳,MTL/MDL 任务开放权重 GLM-5.2 性价比高;可针对业务任务类型预选 backbone,降低 API 探索成本。